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Abstract of DE4209746 

The neural network based fuzzy logic 
controller has a three-level structure. Located 
between two of the levels (I, II) are minimal 
networks for learning a set of three 
membership functions. The inputs (1 ,2) in the 
first level connect with pairs of elements (3,4 
and 5,6), and with further elements (7,8,9 and 
10,11,12). Between the second and third 
levels (II, III) are the inference elements of the 
neuro-fuzzy system. AND functions are 
provided by nine neurons (13-21). Outputs are 
generated by elements (22,24) that provide a 
'defuzzyfying' action. The process operates to 
continuously 'learn' until an optimum condition 
is achieved. USE/ADVANTAGE - Simplifies 
utilisation of expert system. 
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@) Verfahren zur Optimierung eines technischen Neuro- Fuzzy- Systems 

(57) Die Erfindung betrifft ein Verfahren zum Optimieren eines 
Neuro- Fuzzy- Reglers, der ein selbstlernfahtges neuronales 
Netz aufweist; mit Hilfe eines mehrstufigen Lernprozesses, 
bei dem Oaten durch Simulation eines ProzeBmodells 
erzeugt werden. 
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Beschreibung 

Die Erfindung betrifft ein Verfahrcn zur Optimierung 
eines technischen Neuro- Fuzzy-Systems, insbesondere 
eines Neuro- Fuzzy-Reglers. der ein selbstiernfahiges 5 
neuronales Netz mit der Struktur eines Fuzzy-Systems 
aufweist. 

Neuro-Fuzzy-Regler mit entsprechendem Grundauf- 
bau sind bekannt, so z. B. aus der DE 40 08 510 Al. Die 
hier beschriebene Optimal-Entscheidungseinheit, bei 10 
der zunachst die Charakteristik des zu regelnden Sy- 
stems anhand charakteristischer Wert erfaBt und dann 
anhand von Vergleichsmustern weiterverarbeitet wird, 
geht von den Aussagen des geubten Bedienungsperso- 
nals des zu regelnden Prozesses aus. Das Selbstlernver- 15 
halten soil die von dem geubten Bedienungspersonal 
eingegebcnen Werte verbessern und den zu regelnden 
ProzeB optimieren. Nachteilig an einem derartigen Vor- 
gehen ist z. B„ daB fvir Grenzbereiche des ProzeBverhal- 
tens keine Werte vorliegen konnen, da eine Ansteue- 20 
rung der Grenzbereiche mit einem erheblichen Risiko 
der Zerstorung der teueren ProzeBeinrichtungen ver- 
bunden ist und daher unterbleiben muB. Weiterhin ist 
cin subjektiver EinfluB aus dem Expertenwissen nicht 
auszuschlieBen. 25 

Es ist Aufgabe der Erfindung, die bekannten Verfah- 
ren zur Optimierung eines Neuro-Fuzzy-Reglers von 
den Beschrankungen und Nachteilen der Ubernahme 
von Expertenwissen zu befreien und eine Ergebnisopti- 
mierungzu erreichen. 30 

Die Aufgabe wird dadurch gelost, daB der Neuro- 
Fuzzy- Regier um Operatordaten zu erzeugen, einem 
mehrstufigen, insbesondere mindestens dreistufigen 
LernprozeB unterzogen wird, und wobei, ausgehend 
von dem Verhalten eines beliebigen Operators, Ein- 35 
gangsdaten fur einzelne Lernstufen uber zumindest ein 
ProzeBmodell durch Simulation erzeugt werden. Durch 
diese Vorgehensweise wird der Operationsbereich eines 
Neuro Fuzzy-Reglers auch auf Grenzbereiche erstreck- 
bar, die wegen der hohen Wahrscheinlichkeit der Ge- 40 
fahrdung der ProzeBeinrichttungen nicht durch Operat- 
ordaten vorgegeben werden konnen. Dabei wird vor- 
teilhaft erreicht, daB der Programmieraufwand, verur- 
sacht durch die Umsetzung linguistischer Regeln, ver- 
ringert wird. Eine Verringerung des Programmierauf- 45 
wandes ist uberraschenderweise moglich. Des weiteren 
werden vollig subjektive Vorgaben durch objektivere 
Vorgaben ersetzt und damit die Ergebnisse systema- 
tise verbesserbar. 

In Ausgestaltung der Erfindung ist vorgesehen, daB 50 
die Lernstufen als Eingangsdaten das Ergebnis der vor- 
hergchenden Lernstufe verwenden. So ergibt sich eine 
hierarchische Optimierung, die durch Neuro- Fuzzy- 
Netze besonders einfach ist Besonders vorteilhaft ist 
daB die Optimierung in Lernstufen mit Kleinsignalver- 55 
halten und Lernstufen mit GroBsignalverhaiten aufge- 
teilt ist So ergibt sich eine Extrapolation des Reglerver- 
haltens in die Grenzbereiche. Die hxer zwangslaufig auf- 
tretenden Abweichungen zwischen dem realen und dem 
fiktiven ProzeBablauf konnen so verringert werden. 60 

Die Lernstufen konnen auch/oder, nach Freiheitsgra- 
den des Neuro- Fuzzy-Systems, aufgeteilt sein, insbeson- 
dere in aufsteigender Freiheitsgradfolge. Dieses Vorge- 
hen, das vorteilhaft die Aufteiiung in Lernstufen mit 
KJeinsignalverhalten und GroBsignalverhaiten erganzt, 65 
verbessert das Ergebnis insbesondere in den Grenzbe- 
reichen. 

Als erste Lernstufe hat sich ein Modell eines konven- 
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tionellen Reglers als besonders praktikabel herausge- 
stellt, das auch mit den Daten eines menschlichen Ope- 
rators gelernt werden kann. Regler-Modelle sind in viel- 
faltiger Ausgestaltung bereits vorhanden und dem 
Fachmann fur die Simulation von Reglern bekannt. Aus 
der Vielzahl der vorhandenen und anwendbaren Model- 
le ist die Verwendung eines PD-Reglermodells beson- 
ders vorteilhaft, z. B. wenn ein Fuzzy-System mit zwei 
Eingangen und einem Ausgang gelernt werden soil. 
Auch die Modelle von adaptiven Rcglcrn mit Vorstcue- 
rung der Adaptionsparameter oder allgemeiner Vor- 
steuerung sind vorteilhaft verwendbar. So laBt sich die 
Reaktionszeit verringern. 

Das technische Neuro-Fuzzy-System kann sowohl in 
Hard- als auch in Software ausgebildet sein. Die Aus- 
wahl wird je nach der ProzeBgeschwindigkeit und dem 
vertretbaren technischen Aufwand getroffen. Sowohl 
Neuro-Fuzzy-Programme fur Softwarelosungen als 
auch fur Neuro-Fuzzy-ASIC's sind bekannt, z. B. aus "A 
FUZZY CONTROLLER USING A NEURAL NET- 
WORK AND ITS CAPABILITY TO LEARN EX- 
PERT'S CONTROL RULES" und "FUSION TECHNO- 
LOGY OF FUZZY THEORY AND NEUTRAL NET- 
WORKS - SURVEY AND FUTURE DIRECTIONS" 
— (beide erschienen in Proceedings of the International 
Conference on Fuzzy Logic 8c Neutral Networks (lizu- 
ka, japan, July 20-24, 1990) pp. 103- 106.). 

Die Erfindung wird anhand einer Zeichnung naher 
beschrieben, wobei aus der Zeichnungsbeschreibung 
ebenso wie aus den Unteranspruchen weitere erfin- 
dungswesentliche Einzelheiten entnehmbar sind. 

Es zeigen: 

Fig. 1 ein Neuro-Fuzzy-System mit zwei Eingangs- 
und einer AusgangsgroBe, 

Fig. 2 ein charakteristisches Eingangsmuster von 
Operatordaten, 

Fig. 3 das Lernergebnis aus den Daten von Fig. 2 
(Kennflache der Ubertragungscharakteristik, 

Fig. 4 das Ergebnis eines gelernten PD-Reglers mit 
dreitausend Operatordaten, 

Fig. 5 das Ergebnis eines Neuro- Fuzzy- Reglers, der 
mit den Daten des PD-Reglers aus Fig. 4 gelernt wurde 
und 

Fig. 6 das Endergebnis des Neuro- Fuzzy- Systems, 
das durch einen dreistufigen LernprozeB aus den vor- 
hergehenden Daten erhalten wurde. 

Das neuronale Netz in Fig. 1 besitzt zwischen den 
Ebenen I und II zwei minimaie Netzwerke mit Linear- 
und Signoid-Neuronen fiir das Lernen eines Satzes von 
drei Membership- Funktionen, die uber 1 und 2 aufgege- 
ben werden. Die beiden minimalen Netzwerke besitzen, 
ahnlich dem Gesamtnetz, eine Drei-Ebencn-Struktur 
mit einem Eingabeelement 1 bzw. 2 in der Eingabeebe- 
ne, zwei Elemente 3, 4 bzw. 5, 6 in der Zwischenebene 
und drei Elementen 7, 8, 9 bzw. 10, 11, 12 in der Aus- 
gangsebene. Die Elemente 3 bis 12 sind bezuglich ihrer 
Funktionen gekennzeichnet 

FQr die Berechnung der mittleren Dreiecksfunktion 
des Ublichen Lernsatzes bei drei Membership- Funktio- 
nen, wird in der Ausgangsebene vorteilhaft ein lineares 
Neuron eingesetzt, das an seinen Eingangen feste Ge- 
wichte mit den Werten 1 und - 1 hat In den anderen 
Verbindungen werden Gewichtsfaktoren eingesetzt, die 
mit dem Error- Backpropagation-Algorithmus gelernt 
wurden. Die Eingangsfunktionen sind, wie erwahnt, in 
bekannter Weise als mittlere Dreiecksfunktion und seit- 
liche *Schulterwert w -Funktionen ausgebildet. Beispiele 
fur die ublichen Lernsatze und ihre Weiterbehandlung 
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zeigt der Beiirag "Clevere Regler schnell entworfen" 
Elektronik 6/1992, S. 60. 

In dem neuronalen Netz in Fig. 1 entspricht der Aus- 
gangswert des Neurons 7 dem Wahrheitsgrad der links- 
seitigen Membership-Funktion des Eingangs 1 der Aus- 5 
gangswerte des Neurons 8 der dreieckformigen Mem- 
bership-Funktion und der Ausgangsweri des Neurons 9 
der rechtsseitigen Membership-Funktion. Entsprechen- 
des gilt fur die Neuronen 10, 1 1 und 12. 

Zvwschen den Ebenen II und III ist der Inferenzteil 10 
des Neuro-Fuzzy-Systems angeordnet. Bei der Anwen- 
dung von AND-Verknupfungen mit nur zwei Eingangen 
ergeben sich neun mogliche Regeln. Neun Minimum- 
neuronen 13 bis 21 realisieren die AND-Verknupfun- 
gen, die sich ergeben. Da im Beispie! zwei Eingange mit 15 
jeweils drei Membership-Funktionen verwendet wer- 
den, ist die Berucksichtigung von neun Regeln moglich, 
was sich in der Anzahl der Minimumneuronen 13 bis 21 
wiederspiegelt. Im Funktionsteil "Defuzzyfizierung" mit 
den Elementen 22. 23. 24 wird durch die max -dot- Me- 20 
thode mit nachfolgender Schwerpunktberechnung ein 
Ausgangswert 25 berechnet Die vorstehenden Metho- 
den sind dem Fachmann, z. B. aus dem vorgenannten 
Aufsatz, bekannt. 

Mit dem vorstehend geschildertcn Neuro-Fuzzy-Sy- 25 
stem ist es nun beispielsweise moglich, Operatordaten, 
gewonnen durch das Reglerverhalten eines Menschen, 
bei dem besonders in der Fuzzy-Technik bekannten in- 
versen Pendel weiter zu verbessern. In Fig. 2 bezeichnet 
der Eingang 1 den Winkel und der Eingang 2 die Win- 30 
kelgeschwindigkeit des inversen Pendels. Es ist das Ziel, 
das Pendel im Punkt (0, 0) zu stabilisieren. Durch StoQe 
an das Pendel wird eine Stdrung des Prozesses simuliert. 

In Fig. 3 ist das Lernergebnis aus den Daten von 
Fig. 2 gezeigt. Man kann erkennen, daB im mittleren 35 
Bereich, der durch die Operatorlerndaten abgedeckt 
wird, ein Verhalten des Reglers erreicht wird, das dem 
des Operators entspricht. 

In den Eckbereichen, in denen keine Lerndaten vor- 
handen sind, verhalt sich das gelernte System vollig un- 40 
bestimmt. Sollte der ProzeB in diese Randbereiche kom- 
men, wird der Regler ein unbefriedigendes Reaktions- 
verhalten zeigen. 

ErfindungsgemaB wird, vorteilhaft besonders einfach, 
dem Neuro- Fuzzy- Regler zunachst ein System mit we- 45 
nigen Freiheitsgraden gelernt, in diesem Beispiel ein 
PD-Regler, der in ein neuronales Netz transformiert 
wurde. Dieser Regler spiegelt das Verhalten des Opera- 
tors im gesamten Arbeitsbereich ausreichend genau 
wieder. hat aber den NachteiL daB Nichtlinearitaten des 50 
Reglers nicht wiedergegeben werden konnen. Mit ei- 
nem konventionellen PD- Regler- Modell, bei dem nur 
zwei Parameter eingestellt werden konnen, ergibt sich 
ein Regelergebnis, wie es in Fig. 4 zu sehen ist. Dieses 
Reglerergebnis deckt den gesamten GroBsignalbereich 55 
ausreichend gut ab. Aus dem Ergebnis werden nun Da- 
tensatze fur den Regler generiert, die uber den gesam- 
ten Arbeitsbereich verteilt sind. Mit diesen Datensatzen 
lernt der Fuzzy- Regler. Das Ergebnis ist in Fig. 5 zu 
sehen. Man erkennt, daB die Kennflachen beider Regler 60 
(Fig. 4; Fig. 5) prinzipiell gleich sind 

Der erhaltene Fuzzy-Regler von Fig. 5 wird nun als 
voreingestellter Regler fur das Nachlernen der Operat- 
ordaten in einem weiteren LemprozeB verwendet. 
Durch dieses Nachlernen bleibt das GroQsignalverhal- 65 
ten nahezu unverandert, aber im Arbeitspunkt wird das 
Klcinsignaiverhalten des Fuzzy-Reglers an den Opera- 
tor angepaBt Es ist dadurch moglich, nichtlineare Reg- 
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lereigenschaften. die der Operator besitzt und die fur 
das Beherrschen des Prozesses erforderlich sind, nach- 
zubilden. Das Lernergebnis ist in Fig. 6 zu sehen. Ver- 
gleicht man dieses Ergebnis mit Fig. 3, so erkennt man, 
daB der Bereich, an dem Operatordaten verfugbar sind, 
nahezu identisch ist. In den Eckbereichen, also den kriti- 
schen Randbereichen, aber nicht. Dagegen hat das End- 
ergebnis in Fig. 6 ein plausibleres Verhalten, das durch 
Aufpragung des GroBsignalverhaltens aus dem PD- 
Regler erreicht wurde. 

Der vorstehend beschriebene dreistufige LernprozeB. 
bei dem zunachst ein Regler mit wenigen Freiheitsgra- 
den. beispielsweise ein PD-Regler, gelernt wird. der das 
GroBsignalverhalten im gesamten Arbeitsbereich be- 
stimmt, mit Erganzung durch einen Regler mit vielen 
Freiheitsgraden, beispielsweise einem Fuzzy-Regler, 
mit Hilfe von Lerndatensatzen des ersten Reglers und 
einem dritten Lernschritt, in dem dieser zweite Regler 
dann im Kleinsignalverhalten in den Bereichen, in denen 
Operatordaten verfugbar sind. nachgelernt wird, ergibt 
sich eine erhebliche Verbesserung der bisher bekannten 
Moglichkeiten von ProzeBregelungen in Grenzberei- 
chen und der allgemeinen Optimierung. 

Das erfindungsgemaBe Vorgehen ist anhand eines 
einfachcn Bcispiels beschrieben. Es vcrsteht sich, daB in 
prozeBgerechten Abwandlungen auch wesentiich kom- 
pliziertere, mit weiteren Lernschritten durchzufiihrende 
ProzeBregelungen moglich sind. Diese. eventuell auch 
erfinderischen Abwandlungen, sind in das Belieben des 
Fachmannes gestellt. 

Patentanspruche 

1. Verfahren zur Optimierung eines technischen 
Neuro-Fuzzy-Systems, insbesondere eines Neuro- 
Fuzzy- Reglers, der ein selbstlernfahiges neuronales 
Netz mit der Struktur eines Fuzzy-Systems auf- 
weist, wobei der Neuro-Fuzzy-Regler um Operat- 
ordaten zu erzeugen, einem mehrstufigen, insbe- 
sondere mindestens dreistufigen, LernprozeB un- 
terzogen wird, und wobei, ausgehend von dem Ver- 
halten eines beliebigen Operators, Eingangsdaten 
fur einzelne Lernstufen uber zumindest ein ProzeB- 
modell durch Simulation erzeugt werden. 

2. Verfahren nach Anspruch I, dadurch gekenn- 
zeichnet, daB die Lernstufen als Eingangsdaten das 
Ergebnis der vorhergehenden Lernstufe verwen- 
den. 

3. Verfahren nach Anspruch 1 oder 2, dadurch ge- 
kennzeichnet, daB die Optimierung in Lernstufen 
mit Kleinsignalverhalten und Lernstufen mit GroB- 
signalverhalten aufgeteilt ist 

4. Verfahren nach Anspruch 1, 2 oder 3, dadurch 
gekennzeichnet, daB die Lernstufen nach Freiheits- 
graden des Neuro-Fuzzy-Systems aufgeteilt sind, 
insbesondere in aufsteigender Freiheitsgradfolge. 

5. Verfahren nach Anspruch 1, 2, 3 oder 4, dadurch 
gekennzeichnet, daB die erste Lernstufe mit vorge- 
gebenen Werten, vorzugsweise aus einem Modell 
eines konventionellen Reglers, arbeitet 

6. Verfahren nach Anspruch 5, dadurch gekenn- 
zeichnet, daB die erste Lernstufe das Verhalten ei- 
nes P, vorzugsweise eines PD, aber auch eines PID- 
Reglers erlemt 

7. Verfahren nach Anspriichen 1, Z 3 oder 4, da- 
durch gekennzeichnet, daB zumindest einzelne 
Lernstufen mit den Werten vorzugsweise aus ei- 
nem Modell eines adaptiven, z. B. eines selbstadap- 
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tierenden, Reglers mit oder ohne feed forward- 
Schleife arbeiten. 

8. Einrichtung zur Durchfiihrung des Verfahrens 
nach einem oder mehreren der Anspruche 1, 2, 3, 4, 

5, 6 oder 7, dadurch gekennzeichnet, daB der Neu- 5 
ro-Fuzzy-Regier in einem Rechner, vorzugsweise 
einem PC, softwaremaBig ausgebildet ist. 

9. Einrichtung zur Durchfiihrung des Verfahrens 
nach einem oder mehreren der Anspruche 1, 2, 3, 4, 

5, 6 oder 7, dadurch gekennzeichnet, daB der Neu- 10 
ro-Fuzzy-Regler als IC vorzugsweise ais ASIC, 
ausgebildet ist. 

10. Einrichtung nach Anspruch 8 oder 9, dadurch 
gekennzeichnet, daB sie eine vernetzte Rechen- 
struktur mit mathematische Beziehungen, z. B. Al- 15 
gorithmen, bearbeitende Netzknoten aufweist, die 
zumindest teilweise zum Abarbeiten von Error- 
Backpropagation oder Fuzzy-Beziehungen einge- 
richtet sind. 

20 
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